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ABSTRACT: 

The device has a manual input element position sensor, a display unit in the operator's field of 
view displaying at least one virtual control element, an evaluation unit with its input connected to 
the sensor to determine the manual input element position and an image generator between the 
evaluation and display units for displaying a virtual pointer in the operator's field of view 
corresponding to the manually guided control element position. The device has a sensor (2) for 
detecting the position of a manually operated input element (4), a visual display unit arranged in 
the operator's field of view for displaying at least one virtual control element (6), an evaluation unit 
with its input connected to the sensor to determine the position of the manual input element and 
an image generator connected between the evaluation unit and display unit for displaying a virtual 
image pointer (7) in the operator's field of view corresponding to the position of the manually 
guided control element. 
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© Bedieneinrichtung 

(57) Bedieneinrichtung, insbesondere zur abienkungsar- 
men Bedienung von Schaltern in einem Kraftfahrzeug, 
mit einem Sensor (2) zur Erfassung der Position eines 
durch eine Bedienungsperson manuell gefuhrten Einga- 
beelements (4) und einerim Blickfeld der Bedienungsper- 
son angeordneten optischen Anzeigeeinheit zur Darstel- 
lung mindestens eines virtuellen Bedienefements (6) so- 
wie mit einer eingangssettig mit dem Sensor (2) verbun- 
dene Auswertungseinheit (8) zur Bestimmung der Positi- 
on des manuell gefuhrten Eingabeelements (4) sowie mit 
einem eingangsseitig mit der Auswertungseinheit (8} und 
ausgangsseitig mit der Anzeigeeinheit (5) verbundenen 
Bildgeber zur Darstellung eines virtuellen Bildzeigers (7) 
fm Blickfeld der Bedienungsperson entsprechend der Po- 
sition des manuell gefuhrten Bedienelements (4). 
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Beschreibung 

[0001] Die Erfindung betrifft eine Bedieneinrichtung, ins- 
besondere zur ablenkungsarrnen Bedienung von Schaltern 
in einem Kraftfahrzeug, gemaB dem Oberbegriff* des An- 
spruchs 1. 

[0002] Aus der deutschen Patentschrift DE 196 53 595 CI 
ist eine derartige Bedieneinrichtung bekannt, die dem Fah- 
rer eines Kraftfahrzeuges eine Betatigung von Schaltern er- 
moglicht, ohne daB der Fahrer seinen Blick von der Strafie 
abwcndcn rnufi. Hicrzu wcist die bekanntc Bedieneinrich- 
tung eine Kamera auf, die auf die zu betatigenden Schalter 
gerichtet ist und somit ein Bild der Schalter sowie der Hand 
des Fahrers aufhimmt. Dieses Bild wird bei der bekannten 
Bedieneinrichtung mittels eines sogenannten Head-Up-Dis- 
plays in das Blickfeld des Fahrers projiziert, so daB dieser 
die Position seiner Hand relativ zu den zu betatigenden 
Schaltern erfassen kann, ohne den Blick von der StraBe ab- 
zuwenden. Auf diese Weise lassen sich im Kraftfahrzeugin- 
nenraurn angeordnete Gerate (z.B. Klirnaanlage, Radio, 
Navigationssystem, Telefon) ohne Gefahrdung der Ver- 
kehrssicherheit bedienen. Weiterhin ist aus der vorstehend 
erwahnten Patentschrift bekannt, virtuelle Bedienelemente 
wie beispiels weise Schalter mittels des Head-Up-Displays 
in das Blickfeld des Fahrers zu projizicrcn, so daB real aus- 
gefuhrte Schalter eingespart werden konnen. 
[0003] Nachteilig an der vorstehend beschriebenen be- 
kannten Bedieneinrichtung ist jedoch zum einen die Tatsa- 
che, dafi die Kamera nicht nur die Hand des Fahrers und die 
zu betatigenden Bedienelemente, sondern auch beispiels- 
weise Teile der Mittelkonsole mit aufhimmt, was bei der 
Einblendung in das Blickfeld des Fahrers storend wirkt. 
Zum anderen kann die Hand des Fahrers die zu betatigenden 
Schaltelemente aus der Perspektive der Kamera verdecken, 
so daB auch eine Einblendung der Hand des Fahrers in des- 
sen Blickfeld keine befriedigende Bedienung ermoglicht. 
[0004] Der Erfindung liegt also die Aufgabe zugrunde, die 
aus der vorstehend erwahnten Patentschrift bekannte Be- 
dieneinrichtung dahingchend zu vcrbesscrn, daB moglichst 
keine storenden Bildbestandteile in das Blickfeld des Fah- 
rers eingeblendet werden und eine moglichst ergonomische 
Bedienung ermoglicht wird. 

[0005] Die Aufgabe wird, ausgehend von der eingangs be- 
schriebenen bekannten Bedieneinrichtung gemaB dem 
Oberbegriff des Anspruchs 1, durch die kennzeichnenden 
Merkmale des Anspruchs 1 gelost 

[0006] Die Erfindung umfaBt die allgemeine technische 
Lehre, das von der Kamera aufgenommene Bild der Hand 
des Fahrers nicht direkt in das Blickfeld des Fahrers einzu- 
blenden, sondern lediglich zur Posifionsbestimmung der 
Hand des Fahrers zu verwenden. Entsprechend der auf diese 
Weise ermittelten Position der Hand des Fahrers wird dann 
lediglich ein virtucllcr Bildzcigcr mittels cincr optischen 
Anzeigeeinheit in das Blickfeld des Fahrers eingeblendet, 
wobei storende optische Hintergmndsignale in dem von der 
Kamera aufgenommenen Bild, wie beispielsweise Teile der 
Mittelkonsole ausgeblendet werden. 

[0007] DemgemaB weist die erfindungsgemaBe Bedien- 
einrichtung einen Sensor auf, der die Position eines durch 
die Bedienungsperson manuell gefuhrten Eingabeelements 
erfaBt, wobei das Eingabeelement beispielsweise die Hand 
oder der Zeigefinger der Bedienungsperson sein kann. Es ist 
jedoch auch moglich, daB die Bedienungsperson ein separa- 
tes Eingabeelement halt, das mit dem Sensor zusammen- 
wirkt, urn die Positionsbestimmung zu ermoglichen. Als 
Sensor eignet sich vorzugsweise eine Kamera, insbesondere 
eine Infrarotkamera, ein Ultraschallsensor, ein Radarsensor, 
ein kapazitiver Sensor oder ein Beriihrungssensor, wie bei- 



spielsweise ein sogenanntes Touch-Pad. 
[0008] Weiterhin weist die erfindungsgemaBe Bedienein- 
richtung eine im Blickfeld der Bedienungsperson angeord- 
nete optische Anzeigeeinheit zur Darstellung mindestens ei- 

5 nes virtuellen Bedienelementes und des virtuellen Bildzei- 
gers auf, wobei die Anzeigeeinheit vorzugsweise aus einem 
sogenannten Head-Up-Display besteht, das ein Bild direkt 
in das Blickfeld der Bedienungsperson projizieren kann. 
[0009] Daruber hinaus ist bei der erfindungsgemafien Be- 

10 dieneinrichtung eine eingangsseitig rnit dem Sensor verbun- 
dene Auswcrtungscinhcit vorgeschen, wclchc die Position 
des manuell gefuhrten Eingabeelementes bestimmt. 
[0010] SchlieBlich ist noch ein Bildgeber vorgesehen, der 
eingangsseitig mit der Auswertungseinheit und ausgangs- 

15 seitig mit der Anzeigeeinheit verbunden ist, um im Blickfeld 
der Bedienungsperson entsprechend der Position des manu- 
ell gefuhrten Bedienelementes einen virtuellen Bildzeiger 
darzustellen. 

[0011] In der bevorzugten Ausfuhrungsform der Erfin- 

20 dung ist die Auswertungseinheit ausgangsseitig rnit einer 
Vergleichereinheit verbunden, welche die von der Auswer- 
tungseinheit ermittelte Position des manuell gefuhrten Be- 
dienelements mit vorgegebenen Positions daten vergleicht 
und in Abhangigkeit von dem Ergebnis des Vergleichs ein 

25 Stcucrsignal crzeugt. Die vorgegebenen Positionsdatcn cnt- 
sprechen hierbei vorzugsweise den Positionen der einzelnen 
zu betatigenden virtuellen Schaltelemente, so daB der Be- 
nutzer das manuell geruhrte Eingabeelement lediglich in ei- 
nen gewiinschten raurnlichen Bereich bring en muB, um eine 

30 Schalterbetatigung auszulosen. 

[0012] Vorzugsweise ist die Vergleichereinheit hierbei 
ausgangsseitig mit einem Lautsprecher verbunden, um eine 
mogliche und/oder erfolgte Betatigung eines virtuellen Be- 
dienelements akustisch anzuzeigen. Auf diese Weise ist es 

35 beispielsweise moglich, der Bedienungsperson eine akusti- 
sche Ruckkopplung zu geben, indem ein akustisches Signal 
ausgegeben wird, wenn sich das manuell gefiihrte Eingabee- 
lement in einer Betatigungsposition vor einem Schaltele- 
mcnt befindet und die Bedienungsperson wciB dann bci- 

40 spielsweise, daB das manuell geruhrte Eingabeelement wie 
beispielsweise der Zeigefinger lediglich nach vorne ge- 
driickt werden muB, um das Bedienungselement zu aktivie- 
ren, woraufhin dann ein weiteres akustisches Signal ausge- 
geben wird, das sich von dem ersten akustischen Signal vor- 

45 zugsweise unterscheidet, um die erfolgte Betatigung des Be- 
dienungselements anzuzeigen. 

[Q013] In einer Variance der Erfindung ist die Auswer- 
tungseinheit ausgangsseitig mit einem Begrenzer verbun- 
den, der die von der Auswertungseinheit ermittelten Positi- 

50 onsdaten des manuell gefuhrten Eingabeelements auf vorge- 
gebene Werte begrenzt. Auf diese Weise kann beispiels- 
weise Yerhindert werden, daB der in das Blickfeld der Bedie- 
nungsperson cingcblcndctc virtuelle Bildzcigcr bei cincr ab- 
schweifenden Handbewegung der Bedienungsperson aus 

55 dem Blickfeld gerat. Der virtuelle Bildzeiger verbleibt dann 
vielmehr an den Grenzen des Blickfeldes, um eine erneute 
Positionierung durch die Bedienungsperson zu erleichtern. 
Vorzugsweise ist auch der Begrenzer ausgangsseitig mit ei- 
nem LauLsprecher verbunden, um der Bedienungsperson 

60 eine akustische Ruckkopplung zu geben, so daB der Laut- 
sprecher ein akustisches Wamsignal abgibt, wenn sich die 
Hand der Bedienungsperson aus dem Bedienbereich ent- 
fernt. 

[0014] Andere vorteilhafte Weiterbildungen der Erfin- 
65 dung sind in den Unteranspriichen gekennzeichnet bzw. 
werden nachstehend zusammen mit der Beschreibung des 
bevorzugten Ausfiihrungsbeispiels der Erfindung anhand 
der Figuren erlautert. Es zeigen: 
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[0015] Fig. 1 erne perspeklivische Darstellung ernes 
Kraftfahrzeuginnenraums mit der erfindungsgemaBen Be- 
dieneinrichtung, 

[0016] Fig. 2 die erfindungsgemaBe Bedieneinrichtung als 
Blockschaltbild sowie 5 
[0017] Fig. 3 ein alternatives AusfQhrungsbeispiel der Er- 
findung mit einem Touch-Pad als Sensor. 
[0018] Die in Fig. 1 gezeigte perspektivische Darstellung 
zeigt einen Kraftfahrzeuginnenraurii mit einem Fahrer 1 und 
einer in der Dachverkleidung oberhalb der Mittelkonsole 10 
angcordnetcn Kamcra 2, die nach untcn auf cin im Bcrcich 
der Mittelkonsole liegendes Bedienfeld 3 gerichtet ist, wo- 
bei das Bedienfeld 3 im Gegensatz zu herkornmlichen Be- 
dieneinrichtungen keine real ausgefuhrten Schaltelemente 
bzw. Bedienungselemente, enthalt, sondern lediglich als Be- 15 
riihrungsflache fiir einen als Kingabeelement dienenden Zei- 
gefinger 4 des Fahrers, 1 dient. Das von der Kamera 2 auf- 
genommene Bild des Bedienfeldes 3 enthalt also als Infor- 
mation im wesentlichen die Position des Zeigefingers 4 des 
Fahrers. 20 
[0019] Weiterhin weist die ernndungsgemSBe Bedienein- 
richtung ein sogenanntes Head-Up-Display 5 auf, das in 
Fig. 2 nur schematisch dargestellt ist. Der Aufbau eines der- 
artigen Head-Up-Displays 5 ist detailliert in der deutschen 
Offcnlcgungsschrift DE 196 20 199 Al bcschricbcn, so daB 25 
im folgenden auf eine eingehende Beschreibung des Head- 
Up-Displays 5 verzichtet werden kann und diesbeziiglich 
auf die vorstehend genannte Offenlegungsschrift verwiesen 
wird, Zum einen blendet das Head-Up-Display 5 virtuelle 
Bedienelemente 6 in das Sichtfeld des Fahrers 1 ein, wobei 30 
die virtuellen Bedienelemente 6 beispielsweise virtuelle 
Schalter sein konnen. Zum anderen projiziert das Head-Up- 
Display 5 einen virtuellen Bildzeiger 7 in das Sichtfeld des 
Fahrers 1 ein. 

[0020] Die Kamera 2 ist ausgangsseitig mit einer als Aus- 35 
wertungseinheit dienenden Bildanalyseeinheit 8 verbunden, 
die das von der Kamera 2 aufgenommene Bild der Hand des 
Fahrers 1 analysiert und die raumliche Position der Spitze 
des Zeigefingers 4 bestimmt und in Form von Positionsda- 
ten X, Y, Z ausgibt. 40 
[0021] Der Bildanalyseeinheit 8 ist ein Begrenzer 9 nach- 
geschaltet, der die von der Bildanalyseeinheit 8 berechneten 
Positionsdaten X, Y, Z der Spitze des Zeigefingers mit vor- 
gegebenen Positionsdaten vergleicht, die das Bedienfeld 3 
begrenzen. Falls der Fahrer 1 den Zeigefinger 4 aus dem Be- 45 
dienfeld heraus bewegt, so werden die Positionsdaten X, Y, 
Z der Spitze des Zeigefingers 4 auf die Grenzwerte Xlim, 
Yum. Zum an den Grenzen des Bedienfeldes 3 begrenzt. 
[0022] Weiterhin ist der Begrenzer 9 ausgangsseitig mit 
einem Lautsprecher 10 verbunden, der ein akustisches 50 
Wamsignal abgibt, wenn die Hand des Benutzers das Be- 
dienfeld 3 verlaBt. 

[0023] Ausgangsseitig 1st der Begrenzer 9 mit einer Vcr- 
gleichereinheit 11 verbunden, welche die begrenzten Positi- 
onsdaten X LIM , Y LIM , Zjjm mit vorgegebenen Positionsda- 55 
ten vergleicht, welche den virtuellen Positionen der Bedien- 
elemente 6 entsprechen. Falls der Fahrer 1 seinen Zeigefin- 
ger 4 so bewegt, daB sich die Spitze des Zeigefingers 4 im 
Bereich der virtuellen Positionen der Schaltelemente 6 be- 
findet, so gibt &e Vergleichereinheit 11 ein entsprechendes 60 
Steuersignal CONTROL aus, um die mit dem jeweiligen 
Bedienelement 6 zusammenhangende Funktion auszulosen, 
Weiterhin aktiviert die Vergleichereinheit 11 in diesein Fall 
den Lautsprecher 10 zur Erzeugung eines akustischen Riick- 
kopplungssignals, das dem Fahrer 1 eine erfolgreiche Beta- 65 
tigung des jeweiligen Bedienelements 6 anzeigt. Ferner ist 
die Vergleichereinheit 11 ausgangsseitig mit einem Bildge- 
ber 12 verbunden, der das Head-Up-Display 5 zur Darstel- 



lung der virtuellen Bedienelemente 6 ansteuert, wobei das 
von dem Fahrer 1 aktivierte Bedienelemente nach der er- 
foigreichen Aktivierung andersfarbig dargestellt wird, so 
dafi der Fahrer 1 nicht nur ein akustisches Rtickkopplungssi- 
gnal durch den Lautsprecher 10, sondern auch ein optisches 
Rtickkopplungssignal durch die andersfarbige Darstellung 
des Bedienelements 6 in dem Head-Up-Display 5 erhalt. 
[0024] SchlieBlich weist die erfindungsgemafie Bedien- 
einrichtung einen Bildgeber 13 auf, der eingangsseitig mit 
dem Begrenzer 9 verbunden ist, und das Ilead-Up-Display 5 
zur Darstellung des virtuellen Bildzcigcrs 7 in Abhangigkcit 
von dem durch den Begrenzer 9 begrenzten Positionsdaten 
Xum> Y L1M und Z LIM ansteuert. 

[0025] Das in Fig. 3 dargestellte Ausfuhrungsbeispiei 
stimmt weitgehend mit dem vorstehend beschriebenen und 
in den Fig. 1 und 2 gezeigten Ausfuhrungsbeispiei iiberein, 
so daB im folgenden dieselben Bezugszeichen verwendet 
werden und zur Vermeidung von Wiederholungen auf die 
vorstehend Beschreibung verwiesen wird. 
[0026] Die Besonderheit des Ausfuhrungsbeispiels gemaB 
Fig. 3 besteht darin, daB der Sensor 2 keine Kamera, son- 
dern ein beruhrungsempfindliches Touch-Pad ist, daB die 
Position ausgibt, an dem der Fahrer das Touch-Pad beruhrt. 
[0027] Die Erfindung ist nicht auf das vorstehend be- 
schricbcnc Ausfuhrungsbeispiei beschrankt. Viclmchr ist 
eine Vielzahl von Varianten und Abwandlungen denkbar, 
welche von dem erfindungsgemaBen Gedanken Gebrauch 
mac hen und deshalb ebenfalls in den Schutzbereich fallen. 

Patentanspriiche 

1. Bedieneinrichtung, insbesondere zur ablenkungsar- 
men Bedienung von Schaltern in einem Kraftfahrzeug, 
mit 

einem Sensor (2) zur Erfassung der Position eines 
durch eine Bedienungsperson manuell gefiihrten Ein- 
gabeelements (4) und 

einer irnBlickf eld der Bedienungsperson angeordneten 
optischen Anzcigccinhcit (5) zur Darstellung mindc- 
stens eines virtuellen Bedienelements (6), 
eine eingangsseidg mit dem Sensor (2) verbundene 
Aus wertungseinheit (8) zur Bestimmung der Position 
des manuell gefiihrten Eingabeelements (4) 
gekennzeichnet durch, 

einen eingangsseitig mit der Aus wertungseinheit (8) 
und ausgangsseitig mit der Anzeigeeinheit (5) verbun- 
denen Bildgeber (13) zur Darstellung eines virtuellen 
Bildzeigers (7) im Blickfeld der Bedienungsperson ent- 
sprechend der Position des manuell gefiihrten Bedien- 
elements (4). 

2. Bedieneinrichtung nach Anspruch 1, dadurch ge- 
kennzeichnet, daB die Aus wertungseinheit (8) aus- 
gangsseitig mit einer Vergleichereinheit (9) verbunden 
ist, welche die von der Aus wertungseinheit (8) ermit- 
telte Position mit vorgegebenen Positionsdaten ver- 
gleicht und in Abhangigkeit von dem Ergebnis des Ver- 
gleichs ein Steuersignal (CONTROL) erzeugt. 

3. Bedieneinrichtung nach Anspruch 2, dadurch ge- 
kennzeichnet, daR zur akustischen Bestatigung einer 
moglichen und/oder erfolgten Betatigung eines virtuel- 
len Bedienelements (6) ein Lautsprecher (10) vorgese- 
hen ist, wobei der Lautsprecher (10) zur Aktivierung 
mil der Vergleichereinheit (11) verbunden ist. 

4. Bedieneinrichtung nach mindestens einem der vor- 
hergehenden Anspruche, dadurch gekennzeichnet, daB 
die Auswertungseinheit (8) ausgangsseitig mit einem 
Begrenzer (9) verbunden ist, der die von der Auswer- 
tungseinheit (8) ermittelten Positionsdaten auf vorge- 
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5 

gebene Werte begrenzt. 

5. Bedieneinricbtung Bach Anspruch 4, dadurch ge- 
kennzeichnet, daB derBegrenzer (9) ausgangsseitig mit 
einem Lautsprecher (10) verbunden ist, um beim Errei- 
chen oder tJberschreiten der vorgegebenen Positions- 5 
daten ein akustiscbes Warnsignal abzugeben. 

6. Bedieneinricbtung nach mindestens einem der vor- 
hergehenden Anspriiche, dadurch gekennzeichnet, daB 
der Sensor (2) ein optischer Sensor, ein Ultraschailsen- 
sor, ein Radarsensor, ein kapazitiver Sensor oder ein 10 
Bcriihrungsscnsor ist. 

7. Bedieneinrichtung nach Anspruch 6, dadurch ge- 
kennzeichnet, daB der Sensor (2) eine Kamera, eine In- 
frarotkamera oder ein Touch-Pad ist. 

8. Bedieneinrichtung nach mindestens einem der vor- 15 
hergehenden Anspriiche, dadurch gekennzeichnet, daB 
die optische Anzeigeeinbeit (5) ein Head-Up-Display 
ist. 
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